Tháng 11 năm 112 TCN, Thừa tướng Lữ Gia đã lập Thuật Dương Vương lên ngôi, quân của Hàn Thiên Thu tiến vào Nam Việt, đánh phá một vài ấp nhỏ.

Lữ Gia bèn mở một đường thẳng để cấp lương cho quân. Khi quân nhà Hán đến còn cách Phiên Ngung 40 dặm, thì ông xuất quân đánh, giết được bọn Thiên Thu. Sau đó ông sai người đem sứ tiết của nhà Hán cho vào trong hòm để trên núi Tái Thượng (tức là đèo Đại Dũ) dùng lời khéo để tạ tội, một mặt phát binh giữ chỗ hiểm yếu. Ông chất đá giữa sông gọi là Thạch Môn.